現在的 AI,做數學題、寫程式碼、協助辦公,似乎都不在話下了。卡內基梅隆大學的研究人員覺得,是時候換個考法了:不考 AI 懂得多不多、不看 AI 的答案對不對,而是測 AI 有多少心眼,會不會撒謊、談判、帶節奏。
為了考這些東西,研究團隊搭了一個叫 Social Gym 的 AI 社交考場,讓 GPT-5-mini、GPT-4o、Qwen3、Gemma 3 等 7 個模型輪番上場。讓 AI 一起玩 21 個遊戲:有囚徒困境、膽小鬼博弈這樣的博弈,也有經典的狼人殺、誰是臥底的遊戲。
圖|研究整體示意圖(來源:arxiv)
簡單說,以前的測試總愛考 AI 會不會做題。這次考的是:AI 到底有沒有心眼。考驗從 book smart(會讀書)變成了 street smart(會來事)。